iT邦幫忙

1

🎥胸部X光影像(模組化) YouTube生成部落格及總結轉成網頁 自創AI傳送LINE AI解釋簡報 圖片去背 AI SQL AI多醫療模型聊天機器人(使用 Ollama)

  • 分享至 

  • xImage
  •  

很美
https://ithelp.ithome.com.tw/upload/images/20240616/20136076RZ6t9QlI57.jpg
OCR辨識
https://ithelp.ithome.com.tw/upload/images/20240615/20136076r3CpfvJY7P.jpg
https://ithelp.ithome.com.tw/upload/images/20240615/20136076duE6R4Szph.jpg
胸部X光影像(模組化)
https://ithelp.ithome.com.tw/upload/images/20240614/20136076KmSuAnJiEx.jpg
https://ithelp.ithome.com.tw/upload/images/20240614/20136076QwWohrnM7o.jpg
https://ithelp.ithome.com.tw/upload/images/20240613/20136076zy55QOlFxw.jpg
https://ithelp.ithome.com.tw/upload/images/20240613/20136076ea2BBX4GM7.jpg
https://ithelp.ithome.com.tw/upload/images/20240613/20136076IgYQI1u4xR.jpg
https://ithelp.ithome.com.tw/upload/images/20240613/20136076SnRJVVv7ov.jpg
https://ithelp.ithome.com.tw/upload/images/20240613/20136076FpiZK39T41.jpg
https://ithelp.ithome.com.tw/upload/images/20240613/20136076Asi1owZBUX.jpg
YouTube分析含有中文(利用AI的翻譯強項,AI英文考100分)
https://ithelp.ithome.com.tw/upload/images/20240613/20136076DCBwjTYXAv.jpg
https://ithelp.ithome.com.tw/upload/images/20240613/20136076FZFWfLhAaR.jpg
https://ithelp.ithome.com.tw/upload/images/20240613/201360760IFPpjoxZ5.jpg
情緒辨識.....
https://ithelp.ithome.com.tw/upload/images/20240612/2013607619EmVCrIrk.jpg
上傳圖像文件人臉辨識,幫您將人數算出(不是AI但與AI結合)
https://ithelp.ithome.com.tw/upload/images/20240612/201360763LT7ZDT0vQ.jpg
https://ithelp.ithome.com.tw/upload/images/20240612/20136076JcfoK0ozFy.jpg
https://ithelp.ithome.com.tw/upload/images/20240612/201360769sMtT6Zirt.jpg
雲林縣未來 8 小時多雲短暫陣雨或雷雨,最高溫 30 度,最低溫 30 度,降雨機率 33 %
改圖表顯示:(API與AI 差1個單字)
https://ithelp.ithome.com.tw/upload/images/20240612/20136076ZWEJoTxw7c.jpg
https://ithelp.ithome.com.tw/upload/images/20240612/201360762RtR8YDCzw.jpg
https://ithelp.ithome.com.tw/upload/images/20240612/20136076TRR1oQJFfh.jpg
此訊息有圖表
https://ithelp.ithome.com.tw/upload/images/20240612/20136076ix18B8q7Us.jpg
AI分析 mysql
https://ithelp.ithome.com.tw/upload/images/20240611/201360763wcN2jyQRR.jpg
https://ithelp.ithome.com.tw/upload/images/20240611/20136076PoDgFDn2cP.jpg
https://ithelp.ithome.com.tw/upload/images/20240611/20136076Qnp7BgN13q.jpg
附上二種方式 excel 檔讓 AI分析1
https://ithelp.ithome.com.tw/upload/images/20240611/20136076YmrmnmsqmF.jpg
https://ithelp.ithome.com.tw/upload/images/20240611/20136076nDP6yx3xdw.jpg
美呆了:使用 openai chatgpt-3.5-turbo(沒有使用 apikey)及 ollama 架到 line 上來問
使用 openai 很大的好處是快及準不用本地資料,加上將 api 加憑證後天涯海角都可用
https://ithelp.ithome.com.tw/upload/images/20240611/20136076g6QseUKCXT.jpg
今天真高興以往使用 chatgpt-3.5-turbo 只能乖乖的從官網執行,因為沒有釋出 api 版本,但現在竟有 AI 大神使用 proxy 技術克服了,如下 api_key='Whatever you like' 仍然跑的出來,且是裝在 docker.....
所以 AI 真的日新月異(目前測試中,它是用 go 寫的)
https://ithelp.ithome.com.tw/upload/images/20240610/20136076nmJYRpYh8u.jpg
分析儀表板目前出一個更強的叫 FineBI,她們號稱5分鐘學會,將來可能是 PowerBI 的勁敵 加上 Tableau
1.PowerBI恐面臨前有狼後有虎之局
2.FineBI 是 web 真的好
3.可裝在 mysql 如以下:(可外訪意即在家查詢)
4.實測5分鐘便可做出以下效果,直覺式操作,之前學過 PowerBI 光安裝便是一大問題
5.可內外網模式,如果單純內網駭客無法攻擊
6.完整範例很多改數據便可呈現
7.她們號稱零基礎新手 1h 快速入門FineBI學會 80% 的高頻核心功能
8.即時動態反應圖表,感覺很美
https://ithelp.ithome.com.tw/upload/images/20240610/20136076FhWEERVtMS.jpg
https://ithelp.ithome.com.tw/upload/images/20240610/201360764HIr3QOKv9.jpg
https://ithelp.ithome.com.tw/upload/images/20240609/20136076Gd9kGivOe6.jpg
https://ithelp.ithome.com.tw/upload/images/20240610/201360766CQpHMdaiG.jpg
語言對 AI 來說是強項,目前有一大模型一出來便上排行榜
目前測試中,不過要強調繁中,不然會是簡體字(測試中)

台灣專屬大模型感覺不錯推目前下載量仍不多
https://ithelp.ithome.com.tw/upload/images/20240609/20136076A6cOSYjApY.jpg
與 sql 再進一步接觸(目前 AI sql 不勝枚舉)
問題:
1.很多要收費
2.光使用langchain便有很多版本要使用以下:
from langchain.prompts import PromptTemplate
from langchain.utilities import SQLDatabase
from langchain_experimental.sql import SQLDatabaseChain
3.要加 langchain.debug = True
https://ithelp.ithome.com.tw/upload/images/20240609/20136076Y41jF3eCoZ.jpg
AI聊天機器人如何使用錄音轉文字(安裝 whisper不太好理解,記錄起來以免忘記)
whisper 是公認最佳的語音辨識(輝達也是使用whisper),以下是它的使用的重要步驟
1.pip install git+https://github.com/openai/whisper.git
2.with open("temp_audio.wav", "wb") as f:
f.write(audio_file)
3.result = model.transcribe("temp_audio.wav")
4.result['text']
ps:ElementBased function 需使用 from cl.element import ElementBased
以上步驟可以廣泛應用在任何 python 程式哦
https://ithelp.ithome.com.tw/upload/images/20240609/201360768Esb3qEx27.jpg
轉成網頁
https://ithelp.ithome.com.tw/upload/images/20240608/20136076ooIiDzOUCm.jpg
https://ithelp.ithome.com.tw/upload/images/20240608/20136076qOgKvNmEFC.jpg
https://ithelp.ithome.com.tw/upload/images/20240608/20136076p4Yax7Db2e.jpg
🎥YouTube生成部落格總結如下:
https://ithelp.ithome.com.tw/upload/images/20240608/20136076LqKgq623oH.jpg
https://ithelp.ithome.com.tw/upload/images/20240608/20136076fvallxPYmh.jpg
🎥YouTube生成部落格(很有趣生成3個不同型態檔 .md .mp3 .png)
https://ithelp.ithome.com.tw/upload/images/20240608/20136076whR6WaROwA.jpg
https://ithelp.ithome.com.tw/upload/images/20240608/201360760jfHR16Vvf.jpg
https://ithelp.ithome.com.tw/upload/images/20240608/20136076YMJK70y6v2.jpg
https://ithelp.ithome.com.tw/upload/images/20240608/2013607653PLDaZcNd.jpg
傳送email
https://ithelp.ithome.com.tw/upload/images/20240607/201360761diIOjY9vW.jpg
傳送LINE
說明:
1.當您隨時打 line 時 機器便請您提問生成後傳送 line
2.如果沒有便是一般 AI提問
https://ithelp.ithome.com.tw/upload/images/20240607/20136076EjLy2HMW6e.jpg
文字轉視頻2
https://ithelp.ithome.com.tw/upload/images/20240607/20136076K47Lmzs7KO.jpg
去背圖:
https://ithelp.ithome.com.tw/upload/images/20240607/20136076R7TXUSNrnq.jpg
AI簡報總結:(使用 google gemini AI)
重點:for 判斷每張簡報需間隔10秒否則會出錯
https://ithelp.ithome.com.tw/upload/images/20240606/20136076k0FnuQGjlP.jpg
https://ithelp.ithome.com.tw/upload/images/20240606/20136076VCiGglVo9G.jpg
目前在 Dashboard 首推 Power BI但個人感覺比較難學
何不使用 Tableau 簡單易懂,且有使用Power BI的老師有力推更說明Tableau之易
現在個人推使用 python streamlit 開發,極為簡單,百行程式便可立即使用,不用任何租約
如下下畫面,控制權在自已且大部份程式已封裝成模組十分鐘便上手
優點:
1.可與AI接軌
2.控制權在自已,不用繞出去再轉回來,沒有資安問題
3.極低程式碼
4.畫面漂亮
5.即時響應
https://ithelp.ithome.com.tw/upload/images/20240606/20136076gIrkpdJwrn.jpg
https://ithelp.ithome.com.tw/upload/images/20240606/201360765hT79DnpGc.jpg
文字轉視頻1
https://ithelp.ithome.com.tw/upload/images/20240606/2013607675LrJCV99O.jpg
https://ithelp.ithome.com.tw/upload/images/20240606/201360764UaumuJpIF.jpg
AI解釋簡報
https://ithelp.ithome.com.tw/upload/images/20240606/20136076xxVXInFVfP.jpg
https://ithelp.ithome.com.tw/upload/images/20240606/201360769dBwpTzUK8.jpg
https://ithelp.ithome.com.tw/upload/images/20240605/20136076dKwh4PYl4A.jpg
https://ithelp.ithome.com.tw/upload/images/20240605/20136076ZWm9F8fT7S.jpg
你的簡報:
https://ithelp.ithome.com.tw/upload/images/20240605/20136076SSQt3kfCRs.jpg
AI 解釋這張圖+1
https://ithelp.ithome.com.tw/upload/images/20240605/201360760eHvBe209g.jpg
chtgpt今日部份當機(2024/06/04)之前有說過集中式容易當,本地控制權在自已電腦所以不會當
自創按鈕引導式AI文字生成圖片
https://ithelp.ithome.com.tw/upload/images/20240604/20136076jkybnrjjIN.jpg
自創按鈕引導式AI簡報
優點:
1.模組化引進
2.按鈕引導式
3.簡化複雜的移植
4.目前範例大部份都是 openai 或 gemini(需收費),我是使用 本地 ollama
5.功能整合
6.積木式開發
7.直接向原廠 AI 開發詢問
https://ithelp.ithome.com.tw/upload/images/20240604/20136076b1N0R8WTIR.jpg
https://ithelp.ithome.com.tw/upload/images/20240604/201360764WVJZKVRYl.jpg
錄音初級
https://ithelp.ithome.com.tw/upload/images/20240603/20136076hOlAh1vtG3.jpg
加密的資料庫AI登入系統
https://ithelp.ithome.com.tw/upload/images/20240603/20136076heWVYVKv5K.jpg
https://ithelp.ithome.com.tw/upload/images/20240603/201360766qYuN6WDIL.jpg
https://ithelp.ithome.com.tw/upload/images/20240603/20136076a8gwj5ZCXp.jpg
AI與物聯網第二步:
https://ithelp.ithome.com.tw/upload/images/20240603/20136076f9CJrquu3n.jpg
AI與物聯網第一步:
想法:
1.物聯網目前很多使用 MQTT
2.大部份只需設定受控件名稱及MQTT
3.只需設定一次,需可存檔
https://ithelp.ithome.com.tw/upload/images/20240603/20136076NG2PwgkXPj.jpg
AI 小幫手變成動態抓取資料庫資料及隨機圖片
https://ithelp.ithome.com.tw/upload/images/20240602/20136076bCED60YJXO.jpg
https://ithelp.ithome.com.tw/upload/images/20240602/20136076qEHja4gkmQ.jpg
您的每日 AI 小幫手-多模
https://ithelp.ithome.com.tw/upload/images/20240602/20136076N2Zg0HWMIl.jpg
https://ithelp.ithome.com.tw/upload/images/20240602/20136076WLoNndPtKM.jpg
AI 5分鐘做出AI多醫療模型側邊欄網頁
https://ithelp.ithome.com.tw/upload/images/20240601/20136076AoUgIbzQKA.jpg
https://ithelp.ithome.com.tw/upload/images/20240601/201360761n4x9JQoDg.jpg
https://ithelp.ithome.com.tw/upload/images/20240601/20136076QqGwHippOP.jpg
ollama sql 專用模型它只懂語法:
https://ithelp.ithome.com.tw/upload/images/20240601/201360765PH75HXb6h.jpg
更簡單的做法:(使用 sql 專用模型及使用 langchain.chains create_sql_query_chain)
ollama 有 sql 專用模型便代表已經在迎頭趕上了
https://ithelp.ithome.com.tw/upload/images/20240601/201360764h5SWPzqh3.jpg
AI正宗(新)資料庫查詢(使用 langchain_community SQLDatabase)
https://ithelp.ithome.com.tw/upload/images/20240531/20136076RyZIx8qEi7.jpg
GAS 串AI gemini + google 搜尋引擎(GAS是連 linebot 最佳工具)
https://ithelp.ithome.com.tw/upload/images/20240531/20136076ZqMfdAq1Tl.jpg
1.需先具備以下 key:
google 搜尋引擎 ID
Custom Search JSON API 金鑰
searchEngineId&searchapiKey來源:https://developers.google.com/custom-search/v1/overview?hl=zh_TW
LINE Channel Access Token
Generative Language API
SheetId
2. Google Generative AI 生成回答
var googleAIResponse = generateContent("", userMessage);
var conclusion = googleAIResponse.candidates[0].content.parts[0].text;

AI文字產生圖片
https://ithelp.ithome.com.tw/upload/images/20240531/20136076cE6Q4V1CGA.jpg
AI文字產生簡報
https://ithelp.ithome.com.tw/upload/images/20240531/201360761GAqPSIctM.jpg
https://ithelp.ithome.com.tw/upload/images/20240531/20136076Zk7e0LrHOl.jpg
AI圖片解釋(使用 Ollama,看起來很簡單但我寫了很久)
https://ithelp.ithome.com.tw/upload/images/20240530/20136076Ef1Lexv81W.jpg
上傳 pdf 可預覽及AI提問:
https://ithelp.ithome.com.tw/upload/images/20240529/20136076xn6eyFwn9L.jpg
自行開發功能完整多醫療模型聊天機器人
1.權限管控
2.自已的 logo
3.歷史資料記錄
4.多模型切換
5.中文使用 json檔切換
6.界面優
7.網址參數為變數session可防止駭客攻擊
以上皆符合最新設計
https://ithelp.ithome.com.tw/upload/images/20240529/201360765w9XMzEI9I.jpg
我的黑曜石會醫療 AI(不是使用 openai)
https://ithelp.ithome.com.tw/upload/images/20240527/20136076ScGnkJl1gi.jpg
https://ithelp.ithome.com.tw/upload/images/20240527/201360767wGoINyLrv.jpg
AI 很好用但個人認為評估要具二大重點
1.可控(不用受制於AI公司,將來程式可修改)
2.免月租(本地都是使用自已的資源,取決於硬體能力)
最大重點:可以完全相容各大本地軟體,以下3個都是裝在docker的開源軟件:
網址:https://joulong.xxxx 是我自已的 dns
https://ithelp.ithome.com.tw/upload/images/20240527/20136076RKDqhax7M5.jpg
https://ithelp.ithome.com.tw/upload/images/20240527/20136076T0NNx2603k.jpg
https://ithelp.ithome.com.tw/upload/images/20240527/20136076jWZKlHCjL8.jpg
雖然各大醫院都有微調自已的模型,但花費不眥
在這個發展迅速的AI年代建議先使用 ollama 的醫療模組便可
俗話說三個臭皮匠勝過一個諸葛亮,個人所知ollama 的醫療模組
不需用 gguf 轉檔的有2個,要轉檔的有1個
個人測試模型原則:
1.先用 "甲模型" 的提示詞來測 "乙模型" 看誰答的好
2.用中文提示詞來測看是否較有支援
3.測試秒數(目前很多國家工程師大部份使用mistral做為微調模型比較快)
以下是展示效果:
https://ithelp.ithome.com.tw/upload/images/20240527/20136076wnUUDonOSu.jpg
https://ithelp.ithome.com.tw/upload/images/20240527/20136076pERN1IoZdX.jpg


圖片
  直播研討會
圖片
{{ item.channelVendor }} {{ item.webinarstarted }} |
{{ formatDate(item.duration) }}
直播中

尚未有邦友留言

立即登入留言